Recientemente, un método de coloreado de bocetos llamado MangaNinja ha llamado la atención. Solo necesita ingresar un boceto y una imagen de referencia para colorear el boceto basándose en la imagen de referencia. Esta tecnología se basa en un modelo de difusión y se centra en el coloreado de bocetos guiado por imágenes de referencia, lo que mejora en gran medida la precisión y el control interactivo del coloreado. El equipo de investigación, mediante dos diseños innovadores, garantiza la precisa transmisión de los detalles del personaje. En primer lugar, introducen un módulo de reorganización de parches para promover el aprendizaje de correspondencia entre la imagen de referencia en color y el boceto objetivo. En segundo lugar, se emplea un método de conducción por puntos

DiPIR es una tecnología innovadora que resuelve el desafío de insertar objetos virtuales sin problemas en escenas reales. Combina modelos de difusión a gran escala con un proceso de renderizado inverso basado en la física para recuperar con precisión la información de iluminación de una sola imagen, logrando una fusión natural entre el objeto virtual y el entorno. El flujo de trabajo de DiPIR incluye la construcción de una escena 3D virtual, la simulación de la interacción entre el objeto y el entorno, y la optimización de las condiciones de iluminación mediante un modelo de difusión para asegurar que la imagen generada se ajuste a la escena real. Su principal ventaja radica en su amplia aplicabilidad, ya que funciona en escenas con diferentes condiciones de iluminación y genera imágenes realistas.

Un nuevo estudio presenta Flash Diffusion, un método revolucionario que acelera la generación de imágenes. Entrena un modelo predictivo para generar en un solo paso el resultado de predicciones de múltiples pasos con eliminación de ruido, acelerando así el proceso de generación de modelos de difusión preentrenados.